Vào đêm 16 tháng 5 năm 1816, sau khi tham dự tại nhà hát, Beau Brummell đã trốn khỏi Luân Đôn để trốn nợ. Ông chuyển đến Dover và tới Calais, nơi mà ông có thể đi mà không cần hộ chiếu. Ông ở tại khách sạn Dessin và giải trí trong các căn hộ của mình trong khi học tiếng Pháp và viết hồi ký.[13]
Ông sống phần còn lại của cuộc đời lưu vong ở Pháp, sống mười năm ở Calais mà không có hộ chiếu chính thức trước khi có được một cuộc gặp với lãnh sự quán tại Caen vào năm 1830 thông qua ảnh hưởng của Lord Alvanley và Công tước xứ Beaufort. Điều này cung cấp cho anh ta một niên kim nhỏ nhưng chỉ kéo dài hai năm, khi Bộ Ngoại giao đưa ra khuyến nghị của Beau Brummell để bãi bỏ lãnh sự quán. Ông đã làm cho nó với hy vọng được bổ nhiệm vào một vị trí thù lao hơn ở nơi khác, nhưng không có vị trí mới nào được đưa ra.

Nhanh chóng hết tiền và ngày càng trở nên cẩu thả trong trang phục của mình, ông bị buộc vào nhà tù cho các con nợ vào đầu năm 1835 bởi các chủ nợ Calais lâu năm không được trả lương; chỉ nhờ sự can thiệp từ thiện của bạn bè ở Anh, ông mới có thể đảm bảo phát hành vào cuối năm đó.
Năm 1840, Brummell chết không một xu và mất trí vì bệnh giang mai tại Le Bon Sauveur Asylum ở ngoại ô Caen; ở tuổi 61. Ông được chôn cất tại Cimetière, Caen, nước Pháp.[14]